ostbuild: Make --fetch a separate option

ostbuild: Check for the Makefile in the correct directory

gnomeos: Build ostree inside self-hosting system too

build: Add --disable-documentation flag

We may have xsltproc, but no DTDs.

gnomeos: Pull in gzip

It doesn't understand --best, and some builds assume gzip.

core: Move triggers into separate binary: ostree-run-triggers

I'm trying to keep ostree as being closer to just being the versioning
filesystem, so let's split out the triggers into a different binary
(although still namespaced ostree-).

gnomeos: Add upstream-status for texinfo

gnomeos: Pull nss from github mirror

ostbuild: Make explicit resolve (and fetch steps)

Build should only work on already-downloaded sources.

gnomeos: Pull in ISC DHCP from Debian git, make NetworkManager start

ostbuild: Lots of stuff

* Only create one build commit which contains multiple artifact trees,
  rather than one per artifact.  This is atomic.  We can use the new
  compose syntax like foo:/devel to slice out the /devel tree.
* Create the minimal buildroot for each component by composing the
  previous components in the build order, instead of continually
  updating one big tree.
* Ensure the artifact builder gets empty directories in /etc

gnomeos: Install libuuid and libblkid

So NetworkManager can use them.

gnomeos-run: Put current symlink in correct place

gnomeos: initscripts: Add NetworkManager and dbus, kill stupid arm stuff

ostbuild: Optionally log start of commands we want output from too

compose is slow, but we also want output.

core: Fix compose tests

ostbuild: Import odict from gobject-introspection

core: While walking mtrees during commit, ensure the referenced path is resolved

This gives us a clean error instead of an assertion.

core: Error out on an empty compose

core: Add from-file argument to compose

We don't want to have to pass a million arguments.

gnomeos: Pull in ppp and iptables, enough to get NetworkManager to build

gnomeos: Pull in NSS and SQLite as tarball-from-git imports

gnomeos: Pull in libuuid and libblkid from util-linux

compile-one: Fix build of modules that don't support srcdir != builddir

We need to run configure and make/make install in the _build
directory.

ostbuild: Make --debug-shell not exit immediately

We need to keep stdin open.

gnomeos: Work on updating udev

gnomeos: Getting up to NetworkManager now

ostbuild: Allow specifying no components to mean "all"

gnomeos: Add perl-XML-Parser to devel image

Needed by intltool

core: Make diff accept one argument too to mean "foo^ foo"

ostbuild: Allow specifying components to build on the command line

gnomeos: Move gnome-common to devel component

Don't need it in runtime.

gnomeos: Fix gnomeos-run.sh to use new naming scheme

core: Make local-clone handle nested refs/heads directories

core: Ensure we abort transaction if we fail in the middle

Otherwise we could leave a lot of temp files lying around.

gnomeos: Delete now upstream pixman patch

gnomeos: --disable-silent-rules globally

gnomeos: --disable-silent-rules for cairo

gnomeos: Pull in more of X, we're on cairo now

ostbuild: Switch to JSON metadata, various other fixes

gnomeos: Switch to GNU awk

gnomeos: add libXau

ostbuild: Don't fail if trying to rename() across a bind mount

ostbuild: Make use of --recompose

gnomeos: Initial commit should be a compose

This is just cleaner - we know where the ref came from, rather
than making it a copy, and also we can use it with the new
--recompose bits to keep adding to it.

core: Make --recompose skip passed arguments if they were already composed

This allows us to do "--recompose -b foo bar baz" and add bar and baz
iff they weren't already there.

ostbuild: Use split out linux-user-chroot binary

This way other meta-build projects could use it; mainly mock/pbuilder.

Also I don't have to keep running chown root:root; chmod u+s in a
separate root terminal after every install.

gnomeos: Move everything into JSON, start plowing through X.org

Also:

* Stop generating tarballs for artifacts, use plain directories
* Commit artifacts as uid/gid 0, with no xattrs

Other misc stuff

gnomeos: Switch to GNU tar

core: Add --no-xattrs option for commit

Will be used by ostbuild.

core: Error out cleanly if user attempts to commit an empty tree

gnomeos: We can now build gobject-introspection

gnomeos: Add python-dev to devel image, drop pseudo

We need python-dev for gobject-introspection at least, and we don't
need pseudo at this time.

gnomeos: Add python-misc too so we get argparse

For some reason in the current yocto argparse is in python-misc.

gnomeos: Include Python files in main ostree package

.gitignore: Also ignore _build

This is automake's default build directory.

core: Make compose skip commit if tree is identical

This was a new option for commit, but we always want to do it
for a compose.

tests: Fix metadata test, we removed the spurious =

core: Add --print-metadata-key option for show

Useful for tools to extract simple metadata.

Add an initial man page - ostree(1)

Heavily cribbed from systemd - thanks Lennart!

ostbuild: Port chroot-compile-one to ostbuild executor

ostbuild: Port commit-artifacts to ostbuild executor

ostbuild: Move autodiscover-meta to ostbuild executor

ostbuild: Make new 'ostbuild' main entry point, and compile-one a subcommand

The collection of Python scripts here have gotten to the point where
we need to share code.  Start refactoring things so that we have one
main command which imports subcommands as libraries.

ostbuild: Propagate buildroot version, finish add-artifacts

We need to track what buildroot each artifact was created in.

gnomeos: Add --skip-if-unchanged for yocto commit, also show a diff after building

We don't want to make new commits if nothing changed.

core: Add --add-metadata-string option for commit

A convenience function for the common case of slapping a string into
the metadata.

core: Fix libarchive test count

core: Add --tar-autocreate-parents option for commit

The tar files we're making of artifacts don't include parent
directories.  Now we could change the builder to make them, but we can
also just autocreate them on import.  Mode 0755 with no xattrs seems
OK here.

core: Fix build with libarchive disabled

core: Add --skip-if-unchanged option for commit

There's not much point for OS builds to have "empty" commits.

core: Add some more sanity checks to pull when parsing metadata

core: Preemptively error out on paths longer than PATH_MAX

Just noticed this while thinking like an attacker.

core: Allow / in ref names like git does

Using / is nice basically.

gnomeos: Update yocto commit script for new commit commandline syntax

core: Use global random object

We were pointlessly creating a new rand (and thus opening /dev/random)
on every temp file creation, but still using the global rand.

core: Drop unix::is-mountpoint from fast queryinfo flags

If this is present, we call access() and stat() on the parent
directory.

core: Use GFile for repo constructor API, and a bit more internally

Also, ensure that the repo directory GFile is absolute - this avoids
a getcwd() syscall every time we construct a GFile object.

core: Add --recompose option for compose

This will allow us to easily regenerate a compose without passing the
full list of components each time.

core: Change compose to operate purely in-memory

This is *significantly* faster than checking out each branch into the
real filesystem, then importing it again.

core: Allow specifying a previous commit tree as a basis for a new commit

It's pretty trivial to map a previously existing commit tree into a
mutable tree too.  While we're here change the command line arguments
for commit so that we can now properly overlay any combination of
directory, commit, or tarfile.

core: Expose more details of commit via API

Rather than offering high level "commit directory", instead perform
operations on a mtree.  Commits are treated more like regular objects.

Change the commit builtin to drive this all at a lower level.

core: Add omitted mutable tree files

core: Rename "store" public APIs to "stage" since that's what they do

core: Make OstreeRepoFile "public"

* "ls" used it
* It's not like our internal API is 100% stable anyways
* The _ is ugly

core: Add new "mutable tree" class, use it for tar file import

The tar import code forced the resuscitation of a hackish "FileTree"
data type for representing an in-memory tree.  Split this out
into an OstreeMutableTree class for future use by any other in-memory
tree construction.

core: Remove dead code from OstreeRepoFile

Originally I thought it would make sense for OstreeRepoFile to be
mutable, and it probably does, but we should do it in a different way.

ostbuild: Separate metadata discovery, kill wrapper scripts

Add a simple KEY=VALUE metadata file format, and rather than
assuming 'basename' at a low level, allow passing e.g. NAME=gtk3
to override "gtk+".

The wrapper scripts are annoying...for now let's just remove them.

ostbuild: In chroot build, reuse source directory basename

This ensures that the output artifacts are named correctly, and not
"source".

ostbuild: Ensure private libraries are in runtime, and kill .la files

A regular libfoo.so not in one of the regular directories should go in
runtime.  (Probably we should double check it's a regular file too).

Also, delete .la files unconditionally.

core: Support committing multiple tarballs in the same transaction

ostbuild will generate two artifacts: foo-runtime.tar.gz and
foo-devel.tar.gz in the general case.  When committing to the devel
tree, it'd be lame (i.e. slower and not atomic) to have to commit
twice.

gnomeos: Rename images to "runtime" and "devel"

They're just better names, and this matches what the
default artifact splitter is doing now.

ostbuild: Flesh out chroot build to use ostbuild-user-chroot

One thing that made this take significantly longer than it might
have otherwise is that we have to keep PWD "up to date" - otherwise
we hit bugs in glibc's getcwd() implementation.

gnomeos: Pull in ostree from working copy directly

We'll just try to keep it stable.

core: Install unversioned .so, and kill .la file

This avoids Yocto barfing on a versioned shared library symbolic link
without a -dev package.

core: Support --owner-uid and --owner-gid options for commit

This allows us to more easily import user-built tarballs into
a root-owned OSTree repo.

tests: Ensure we quote grep pattern

Otherwise we fail if the pattern starts with -

core: In user mode checkouts of archives, use hard links

Now that we've done all the gyrations to separate content from
metadata in archives, we can just hard link when doing user checkouts.

core: Fix a few memory leaks

gnomeos: Don't make device files

We don't need them any more inside a chroot now that we have
ostbuild-user-chroot.